Evolving Agent Interfaces
进化式智能体接口:从任务经验自动构建工具
🧭 Agent 接口自动进化 ★ 深度解读
University of California, Santa Barbara · Cornell University · Carnegie Mellon University · Simular
让智能体自主进化计算机操作接口,27B开源模型以低成本超越GPT-5.5和Claude Opus 4.8
📌 工作参考价值(4 点)
- 将「接口/工具库」作为可进化资产:不要只靠人工预先设计固定工具集。可以从 Agent 在业务任务(如广告后台操作、选品数据拉取、报表生成)中的轨迹里自动提炼可复用 API 或脚本,让模型从低频、低效的 GUI 操作转向结构化调用,直接降低任务成本并提高成功率。
- 分离构造证据与选择证据:进化时只用无标签训练轨迹驱动工具修改,用独立的 validation 任务做选择,能显著降低对训练任务的过拟合。这在用 Agent 自动生成推荐/广告流程工具时可直接复用:不要让生成工具的模型看到最终评分或测试集。
- 低成本模型 + 进化工具层可以逼近甚至超越更强模型:论文用 Qwen3.8-27B 加上进化出的接口库,在 OSWorld V2 超过 GPT-5.5 和 Claude Opus 4.8,成本仅 4.3% 和 1.5%。业务上可以优先在工具层做自动搜索,而不是一味换更大模型。
- 重复验证对长程 Agent 任务很重要:ScienceBoard 上单次验证分数噪声大,平均多次验证后才选中稳定高分的仓库。业务里做 Agent 工具选择或在线评估时,对长流程任务应做多次重复评估,避免一次偶然高分误导。